Tòa nhà là một trong những dinh thự lớn nhất được Pháp xây ở Đông Dương gồm 30 phòng, mỗi phòng có một phong cách trang trí khác nhau. Theo thiết kế ban đầu dành cho phủ Toàn quyền Đông Dương, mặt bằng của tòa nhà được thiết kế đối xứng, có một khối lớn ở giữa và hai khối ở hai bên. Tòa nhà này có hai tầng chính đặt trên một tầng đế, trên cùng là một tầng sát mái. Tầng đế là một tầng nửa hầm xây nổi, có kẻ mạch vữa giả đá thường thấy trong kiến trúc cổ điển Pháp, đặt các phòng phục vụ; tầng hai vốn là phòng khách, phòng làm việc và phòng đại tiệc. Tầng ba là những phòng riêng và nơi ở của Toàn quyền Đông Dương.

Giống nhiều kiến trúc thuộc địa Pháp cùng thời, nó có phong cách hoàn toàn Châu Âu. Yếu tố Việt Nam duy nhất trong khu vực là các cây xoài trồng ở vườn xung quanh.

Tòa nhà được quét vôi vàng, nằm sau cổng sắt. Các yếu tố của kiến trúc Phục hưng Ý có thể liệt kê là:

• các phòng (aedicules)
• cầu thang lớn và sảnh trung tâm (a formal piano nobile reached by a grand staircase)
• các trán tường gãy (broken pediments)
• các cột cổ điển (classical columns)
• các góc tường (quoins)